Sau những biến động trên chính trường, Hàn Thác Trụ dẹp bỏ các phe cánh khác, độc chiếm triều cương với chức vụ Thái sư Bình chương quân quốc trọng sự. Thác Trụ vì muốn nâng cao uy tín của mình nên nghĩ đến việc khôi phục Trung Nguyên vốn bị mất vào tay người Kim đã hơn 70 năm. Ngô Hi biết được chuyện này, tìm cách lấy lòng Thác Trụ và xin được về Tây Thục. Hữu Thừa tướng Trần Tự Cường vốn là tay chân của Thác Trụ, cũng tán thành việc đó. Do vậy vào mùa thu năm 1201, Ngô Hi được phong làm Hưng châu trú trát ngự tiền quân đô thống chế, tri Hưng châu, Lợi châu tây lộ An phủ sứ[2]. Tòng chánh lang Chu Bất Khí dâng thư lên Thác Trụ nói Ngô Hi không thể đảm đương được công việc, Thác Trụ nhận thư nhưng vẫn bổ dụng ông. Tháng 3 ÂL năm 1202 được thăng làm Tứ Xuyên An phủ phó sứ, tháng sau lại được làm Thiểm Tây, Hà Đông lộ chiêu phủ sứ. Trong khi ở trấn, Ngô Hi tìm cách lật đổ phó đô thống chế Vương Đại Tiết và chiếm được đại quyền ở Thục[2]. Năm 1205, triều đình tính tới việc động binh, phong Ngô Hi làm Tuyên phủ phó sứ Tứ Xuyên, tri Hưng châu; lo việc tiến quân từ phía tây; ngoài ra còn kiêm thêm chiêu phủ sứ Thiểm Tây, Hà Đông.

Những hành động chuẩn bị tấn công của Tống lũ lượt bay về triều đình nước Kim. Ngô Hi từ đầu đã có ý phản, sai Diêu Hoài Nguyên đến Kim thỉnh hàng, cầu phong Thục vương, nguyện dâng đất tứ châu Giai[3], Thành[4], Hòa[5], Phượng[6]. Kim Chương Tông có ý tranh thủ dụ hàng Ngô Hi để chiếm Thiểm, Thục; nên gửi thư cho ông, hứa phong Thục vương và cho phép đời đời con cháu thế tập, trấn giữ một phương[7]. Do đó, khi Hàn Thác Trụ nhiều lần thúc giục Ngô Hi tiến quân, ông đều chần chừ, án binh ở Hà Trì không tiến.

Thác Trụ cử Trình Tùng đến Tứ Xuyên làm tuyên phủ sứ, Ngô Hi tìm cách giam lỏng những người thân tín của Tùng, do đó Tùng mang danh là chánh sứ nhưng phải nơm nớp lo sợ Ngô Hi. Lúc này bắc phạt thất bại, tướng Kim Bộc Tán Quỹ chia quân nam hạ, cả triều đình Lâm An rúng động. Trong khi chiến sự ở Lưỡng Hoài vẫn đang giằng co thì quân Kim cũng đánh tới Tây Hòa. Các tướng Vương Hỉ, Lỗ Dực ra kháng cự. Trong lúc tình hình đang căng thẳng thì Ngô Hi hạ lệnh lui về giữ Bảo Hắc cốc. Quân Kim nhân đó truy kích theo, quân Tống thảm bại. Ngô Hi bèn đốt Hà Trì, lui về Thanh Dã Nguyên[2][7]. Hi lại lui về Bích Ngư quan, chiêu tập một số người lưu vong để có thêm lực lượng. Đô thống chế Mưu Tư đem trọng binh trấn thủ Đại Tản quan, nhưng Ngô Hi lại tìm cách ngăn trở, khiến quân Kim thừa cơ áp sát, vây hãm Đại Tản quan; Hi liền lui về cửa Ta. Có Trần Quốc dập đầu ở ở trước cửa, tố cáo Ngô Hi làm phản với Hàn Thác Trụ, Thác Trụ không nghe.